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【摘要 】 MetaDTA 是 一 款 对 诊断 试验 准确 性 研究 进行 Meta 分 析 的 在 线 、 交 互 式 应 用 程序 ， 该 应 用 程序 调用 R 
软件 中 lme4 和 shiny 程序 包 实 现 统计 分 析 并 建立 交互 式 用 户 界面 。 该 应 用 程序 无 需 用 户 了 解 任 何 有 关 统 计 和 编程 的 知 
识 ， 也 无 需 安装 任何 专业 软件 ， 便 于 无 专业 统计 知识 的 用 户 使 用 。 本 文 将 重点 介绍 MetaDTA 平台 诊断 试验 准确 性 的 量 
化 、 结 果 可 视 化 、 交 互 式 功能 等 ， 结 合 实例 向 用 户 介绍 该 应 用 程序 的 具体 操作 方法 ， 旨 在 帮助 相关 研究 人 员 完 成 诊断 
准确 性 研究 Meta 分 析 、 绘 制 汇总 受 试 者 工作 特征 (SROC ) 曲线 、 绘 制 纳入 研究 质量 评价 结果 以 及 进行 敏感 性 分 析 。 

【关键 词 】 MetaDTA; 诊断 试验 准确 性 ; Meta 分 析 ; 双 变量 模型 
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[Abstract] MetaDTA is an online, interactive application for Meta-analysis of diagnostic test accuracy studies, 


which calls on the Ime4 and shiny packages in R software to perform the statistical analyses and create an interactive user 
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interface. The application does not require any knowledge of statistics and programming, nor does it require any specialized 


software to be installed, making it easy to use for users with no specialized statistical knowledge. In this paper, we will focus on 


the quantification of diagnostic test accuracy, visualisation of results and interactive functions of the MetaDTA platform, and 


introduce users to the specific operation of the application with examples, aiming to help relevant researchers to complete Meta- 


analysis of diagnostic accuracy studies, plot summary receiver operating characteristic ( SROC ) curves, draw the results of the 


evaluation of the quality of the included studies, and carry out sensitivity analysis. 


[ Key words ] 


及 时 准确 地 诊疗 疾病 是 临床 有 效 治疗 的 前 提 。 随 着 
对 疾病 的 深入 认识 、 医 疗 技术 的 快速 发 展 以 及 诊断 方式 
的 不 断 增 加 ， 给 诊断 方式 的 最 终 选 择 带 来 了 困难 “| 。 
诊断 试验 研究 (diagnostic test accuracy, DTA) 是 指 临 
床上 采取 一 种 或 多 种 诊断 方式 判断 研究 对 象 是 否 患 有 某 
种 疾病 的 试验 ， 可 为 疾病 的 正确 诊断 和 鉴别 诊断 提供 了 
重要 依据 ， 通 常 使 用 灵敏 度 、 特 异 度 等 指标 来 表示 诊断 
试验 的 准确 性 ” 。 诊 断 试验 准确 性 Meta 分 析 ( meta- 
analysis of diagnostic test accuracy, DTA-MA ) 可 按照 预 
定义 的 纳入 和 排除 标准 明确 DTA、 考 虑 其 灵敏 度 和 特异 
度 之 间 的 相关 性 并 使 用 双 变量 模型 综合 多 个 独立 研究 的 
灵敏 度 和 特异 度 ， 从 而 评估 诊断 试验 的 性 能 “* JH 
DTA-MA 的 结果 将 以 平均 准确 点 或 汇总 受 试 者 工作 特征 
(summary receiver operating characteristic, SROC ) 曲线 
的 形式 呈现 。 


1 MetaDTA 平台 的 简介 


MetaDTA 在 线 平 f (https://ersu.shinyapps.io/ 
MetaDTA/ ) 是 一 款 基 于 网 络 使 用 统计 软件 R 以 及 软件 
包 Shiny 和 lme4 进行 “点 击 式 ”DTA-MA 的 交互 式 在 
线 应 用 程序 。Shiny 是 一 个 允许 R 用 户 创建 具有 交互 式 
用 户 界面 的 在 线 应 用 程序 的 软件 包 、lme4 是 一 个 拟 合 
广义 线性 混合 效应 模型 的 软件 包 ， 而 MetaDTA 则 托管 
在 shinyapps 服务 器 上 。 任 何 用 户 仅 需 拥有 网 络 和 浏览 
a BY AT (EA, 无需 事先 了 解 HTML, JavaScript 和 CSS 
等 在 线 开 发 语言 、 无 需 任何 专业 统计 软件 以 及 无 需 掌 握 
任何 有 关 统 计 或 编码 的 知识 等 ， 亦 可 计算 灵敏 度 与 特异 
度 汇 总 估计 值 、 绘 制 SROC 曲线 并 进行 敏感 性 分 析 用 以 
分 析 排 除 部 分 研究 后 对 结果 的 影响 。 其 中 ,诊断 试验 准 
确 性 的 量化 、 结 果 可 视 化 和 交互 式 功能 是 该 平台 用 以 完 
成 DTA-MA 的 重要 部 分 。 

1.1 诊断 试验 准确 性 的 量化 

为 了 评估 诊断 试验 的 准确 性 ,需要 将 诊断 试验 与 “ 金 
标准 ”进行 比较 ,便于 将 人 群 区 分 为 所 检验 疾病 的 健康 
或 患 病状 态 。 而 用 以 将 人 和 群 分 为 健康 或 患 病 的 值 称 为 阔 
值 或 临界 值 ， 阔 值 可 通过 在 连续 标尺 上 滑动 滑 块 更 改 健 
康 和 患 病 的 均值 与 标准 差 测 量 得 出 ， 高 于 该 值 的 患者 被 
诊断 为 患 有 相关 疾病 ， 低 于 该 值 的 患者 被 诊断 为 健康 


MetaDTA; Diagnostic test accuracy; Meta-analysis; Bivariate model 


(图 1) 。 FAB BL ELSE TE Se, BEE BG 
患者 和 健康 患者 的 检测 值 分 布 进行 分 解 ， 从 而 产生 真 阳 
TE CTP) 、 真 阴性 (TN ) 、 假 阳性 CFP) 、 假 阴性 CFN ) 
等 4 类 不 同 的 患者 (图 2) 。 
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图 1 连续 标尺 测试 阔 值 


Figure 1 Continuous scale test threshold 


灵敏 度 和 特异 度 被 用 于 评估 诊断 试验 的 准确 性 ， 两 
者 会 随 阔 值 的 不 同 而 变化 , 其 关系 可 用 以 灵敏 度 为 纵 轴 、 
1- 特异 度 为 横 轴 作 受 试 者 工作 特征 (ROC ) 曲线 体现 ， 
并 且 每 条 ROC 曲线 经 过 左下 角 ( 特异 度 =1, 灵敏 度 =0 ) 
和 右上 角 (特异 度 =0， 灵 人 敏 度 =1 ) ， 若 左下 角 的 点 高 
于 疾病 和 健康 分 布 的 阔 值 ， 检 测 会 将 所 有 患者 归 类 为 健 
康 ; 若 右 上 角 的 点 低 于 疾病 和 健康 分 布 的 阔 值 ， 检 测 会 
将 所 有 患者 归 类 为 患 病 (图 3) ' 。 灵 敏 度 和 特异 度 
说 明了 检测 结果 对 真实 疾病 状态 的 反映 程度 ， 但 要 全 面 
了 解 检 验 在 临床 实践 中 的 应 用 情况 ， 还 需要 考虑 受 检 圳 
者 的 实际 患 病 率 ， 即 患 病 人 数 占 检测 人 数 的 百分比 ， 患 
病 率 可 滑动 滑 块 改变 并 且 ROC 图 会 随 之 变动 (图 4) 。 
与 此 同时 ， 若 灵敏 度 与 特异 度 保持 不 变 ， 阳 性 预测 值 和 
阴性 预测 值 亦 会 随 患 病 率 的 变化 而 变化 (图 5)。 

1.2 诊断 试验 准确 性 的 结果 可 视 化 
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Figure 2 Distribution of threshold segmentation detection values in 
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Figure3 ROC plot 


诊断 试验 准确 性 进行 Meta 分 析 的 结果 以 平均 准确 
点 或 SROC 曲线 的 形式 呈现 ， 根 据 该 曲线 所 绘制 的 ROC 
图 说 明了 不 同 试验 姜 值 的 灵敏 度 和 特异 度 是 如 何 变化 
的 。SROC 图 不 仅 可 以 通过 95% 的 置信 区 间 来 表示 平均 
点 或 曲线 估计 的 不 确定 性 、 通 过 95% 的 预测 区 间 来 表 
示 准 确 性 估计 之 间 的 异 质 性 ， 还 可 以 利用 “十 字 准 线 ” 
呈现 SROC 图 中 单个 研究 的 灵敏 度 、 特 异 度 以 及 相关 的 
置信 区 间 ' 1。 并 且 用 于 DTA 研究 的 Cochrane 手册 、 
PRISMA 和 《医学 检验 方法 指南 》 等 指导 诊断 试验 准确 
性 进行 Meta 分 析 的 文件 均 建 议 基于 Meta 分 析 的 数据 用 
SROC 曲线 呈现 诊断 试验 的 总 体 结果 一 "1 。 
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Figure 4 Continuous scale of prevalence 


Predictive Value (%) 


Prevalence of Disease (%) 
5 阳性 预测 值 和 阴性 预测 值 随 患 病 率 变化 的 情况 


Figure 5 Changes in positive predictive value and negative predictive 


value with prevalence 


SROC 图 主要 突出 两 点 ， 一 是 质量 评估 ， 可 同 
时 呈现 QUADAS-2 工具 所 有 维度 的 质量 评估 信息 。 
QUADAS-2 ( Quality Assessment of Diagnostic Accuracy 
Studies, version2) 工具 包含 病例 选择 、 待 评价 试验 、 
金 标准 、 病 例 流 程 与 进展 情况 等 4 个 维度 ， 并 对 每 个 维 
度 进 行 偏 倚 风 险 评估 、 对 前 3 个 维度 进行 适用 性 评估 "1。 
MetaDTA 平台 为 在 SROC 图 中 更 好 地 呈现 QUADAS-2 
工具 评估 4 个 偏 倚 风 险 维 度 、3 个 适用 性 维度 和 所 有 质 
量 评价 的 结果 ， 将 一 个 圆 形 分 别 分 成 4、3、7 个 等 分 ， 
这 些 圆 形 在 ROC 图 中 被 用 于 代表 单个 研究 并 会 根据 其 
质量 评价 分 数 着 色 ， 以 绿色 表示 偏 位 风险 /适用 性 低 、 
红色 表示 偏 傈 风险 /适用 性 高 、 灰 色 表 示 偏 倚 风 险 / 适 
HESS UU. Db, M SROC 图 中 可 以 得 出 三 方面 


NS 
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示 该 研究 的 作者 、 年 份 、 灵 敏 度 和 特异 度 等 信息 ， 奉 用 


单个 研究 和 汇总 Meta 分 析 结 果 的 关系 以 及 探索 质量 较 
低 或 不 确定 的 研究 结果 是 否 与 质量 较 高 的 研究 结果 存在 
系统 性 差异 ， 这 表明 不 同 的 质量 可 能 会 导致 异 质 性 。 

二 是 研究 权重 百分比 ， 可 显示 每 项 研究 对 汇总 Meta 


分 析 结 果 的 相对 贡献 。 人 研究 权重 百分比 的 绘制 是 使 用 
BURKE 等 ' “| 基于 Fisher 信息 矩阵 的 分 解 ， 在 多 参数 


Meta 分 析 模 型 中 将 参数 估计 的 总 方差 矩阵 分 解 为 特定 
研究 的 贡献 ， 从 而 计算 得 出 研究 百分比 权重 。 由 于 需要 
考虑 灵敏 度 与 特异 度 的 估算 ， 每 项 研究 会 对 每 个 结局 给 
予 不 同 的 权重 ， 故 而 采用 与 SROC 图 中 坐标 轴 一 致 的 机 
圆 ， 并 且 顶 圆 的 高 度 与 宽度 和 双 变 量 Meta 分 析 模型 的 
研究 权重 百分比 成 正比 5 。 因 此 ,在 MetaDTA 平台 的 
SROC 图 中 研究 估计 值 显示 为 黑色 空心 椭圆 ， 其 大 小 和 
形状 代表 灵敏 度 和 特异 度 的 研究 权重 百分比 ， 若 在 图 中 
观察 到 所 有 的 椭圆 大 小 相似 ， 则 表明 Meta 分 析 中 的 研 
究 权 重 相 等 ; 知 观 察 到 椭圆 出 现在 SROC 图 中 最 左上 角 
处 ， 则 通常 不 太 精 确 且 权重 百分比 较 小 。 
13 诊断 试验 准确 性 的 交互 式 功能 

MetaDTA 平台 是 一 个 免费 且 基 于 网 络 的 应 用 程序 ， 
有 具 有“ 点击 式 ”界面 ,便于 用 户 在 不 需要 掌握 统计 软件 
相关 知识 的 前 提 下 仍 可 较 好 的 使 用 。 该 应 用 程序 是 完全 
交互 式 的 ， 一 方面 能 够 支持 从 多 个 角度 观察 数据 ， 并 且 
可 以 由 多 个 图 层 组 成 ， 从 而 使 一 个 图 中 可 用 于 描述 多 
种 类 型 的 分 析 ， 其 中 每 个 图 层 只 有 在 用 户 选 择 时 才 可 

和 。 如 点 击 SROC 图 中 的 特定 研究 点 ， 会 在 图 下 显 


MetaDTA: Diagnostic Test Accuracy Meta-analysis Home Load Data Meta-Analysis 


Sensitivity Analysis 


户 还 选择 了 灵敏 度 和 特异 度 的 研究 权重 以 及 协 变量 
均 可 呈现 。 男 一 方面 可 以 用 作 探 索 工具 以 及 数据 集 分 
析 ， 并 为 敏感 性 分 析 提 供 有 用 的 信息 。 如 用 户 不 仅 可 在 
SROC 图 中 选择 添加 十 字 准 线 ， 以 探查 每 项 研究 的 灵敏 
度 与 特异 度 的 不 确定 性 ， 还 可 将 偏 们 风险 较 高 的 研究 从 
AAS ir PIB, LAPEER Meta 分 析 结 果 的 影响 。 
14 MetaDTA 平台 的 页 面 简介 

MetaDTA 的 主页 包括 6 个 页 面 , 分别 是 首页 

(Home) 、 数 据 上 传 (Load Data) 、Meta 分 析 ( Meta- 

Analysis ) 、 敏 感性 分 析 ( Sensitivity Analysis ) 、 患 病 率 
(Prevalence) 、 人 参考 文献 ( References) 。 其 中 ，“ 首 页 ” 
提供 MetaDTA 平台 的 功能 导航 与 用 户 指南 、lme4 程序 
包 介 绍 (https://CRAN.R-project.org/package=lme4 ) 以 及 
诊断 试验 准确 性 交互 式 计算 工具 (https://ersu.shinyapps. 
io/diagprimer/) (图 6) ; 数据 上 传 、Meta 分 析 和 敏感 
性 分 析 作 为 该 平台 的 主要 功能 ， 其 操作 流程 将 在 下 文 进 
行 详细 介绍 ; “ 患 病 率 ”可 根据 Meta 分 析 结 果 预 测 某 
一 人 群 会 出 现 TP、TN 、FP、FN 结果 的 例 数 ， 有 助 于 为 
ee 

诊断 试验 是 否 阳性 划分 例 数 、 树 形 图 2 以 患 病 和 健康 
a RiuERE S 
计 方 法 的 参考 文献 和 开发 该 平台 所 调用 的 程序 包 。 为 了 
用 户 能 够 更 好 地 使 用 MetaDTA 平台 ， 本 文 将 结合 实例 
向 用 户 介绍 该 平台 的 操作 方法 以 便 快 速 完成 DTA-MA。 


Prevalence References 


MetaDTA: Diagnostic Test Accuracy Meta-Analysis v2.1.1 (February 2024) 
Version 2.0 is the version as described in the paper: Patel A, Cooper NJ, Freeman SC, Sutton AJ. Graphical enhancements to summary receiver operating charcateristic plots to facilitate the 
analysis and reporting of meta-analysis of diagnostic test accuracy data. Research Synthesis Methods 2020, https-//doi.org/10.1002/jrsm. 1439. €* 


This builds on the previous version as described in the paper: Freeman SC, Kerby CR, Patel A, Cooper NJ, Quinn T, Sutton AJ. Development of an interactive web-based tool to conduct and 
interrogate meta-analysis of diagnostic test accuracy studies: MetaDTA. BMC Medical Research Methodology 2019; 19: 81 which can be accessed at MetaDTA version 1.27. © 


If you use MetaDTA please cite these papers. 
MetaBayesDTA is now available! 
MetaBayesDTA is an extended, bp da — of sage: which allows 


a meta-analysis often use different reference tests using meta-regression. 


users to conduct Len oe of test accuracy, with 


or with: 
iety of ing those wh not have required to fit such mo usit na: — Il software. Furthermore 
ivariate node, one iua ES Lert] analysts and ce parie Meanwhile, for the model 


out assuming a gold standard. Due to its user-t ae and broad array of features, MN, 
re. TA has many features not available 
not assume a perfect gold standard, the ea can partially account for the fact that ‘different s Sudies 
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—— HSROC curve 

o Summary estimate 
一 一 95% Confidence region 

*- 9596 Predictive region 
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False Positive Rate 


MetaDTA 20-minute tutorial as part of ESMARConf2023 


6 MetaDTA 平台 首页 
Figure 6 MetaDTA platform home 


(GP pane ER 


2 操作 流程 
2.1 数据 上 传 
“数据 上 传 ” 包含 页 面 左 侧 操作 栏 和 文件 上 传 (File 

Upload ) , 示例 数据 ( Example datasets ) 与 数据 预览 ( Data 
for Analysis ) 3 个 功能 ( 图 7) 。 左 侧 操作 栏 根 据 文 件 
是 否 包 含 质 量 评价 结果 和 /或 协 变量 数据 勾 选 相应 选项 
并 上 传 文件 ( 表 1) ; 用 户 可 根据 文件 上 传 选项 的 栏目 
标题 说 明 设置 数据 文件 格式 ; 在 示例 数据 处 查看 平台 示 
例 数据 集 的 相关 信息 ， 在 数据 预览 处 对 已 上 传 的 数据 进 
行 查看 。 

上 传 数 据 的 具体 步骤 如 下 : 根据 文件 内 容 勾 选 
左 侧 操作 栏 : 4 Xe “File options” "Select example 
dataset”。 选 择 与 上 传 文件 : 点 击 “Select” 从 本 地 文 
件 夹 选择 以 “xlsx” 或 “csv” 格 式 保存 的 数据 并 上 
传 。 上 传 完 成 后 ，“Select” 下 的 蓝 色 条 会 显示 “Upload 
complete" , 

检查 数据 : iib “Data for Analysis" Xj E4 B5 2 
据 进 行 预览 和 检查 。 本 文 将 以 Informant Questionnaire 
on Cognitive Decline in the Elderly (IQCODE ) for the 


diagnosis of dementia within a secondary care setting 一 文 数 


据 为 例 ( 表 2) 对 本 平台 的 操作 进行 介绍 51 。 
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Rl 操作 栏 参数 设置 
Table 1 Operation bar parameter setting 
参数 设置 选项 


是 否 将 第 一 行 作为 列 标题 ( First row as 
column headings ) 


文件 选择 (File options ) 
示例 数据 格式 (Select 标准 格式 (Standard ) -不 涉及 质量 评价 
example dataset ) 结果 和 协 变量 数据 

包含 协 变量 数据 格式 ( With Covariates ) — 
仅 涉及 协 变量 数据 

包含 质量 评价 结果 格式 (With Quality 
Assessment ) — 仅 涉及 质量 评价 结果 数据 
包含 质量 评价 结果 和 协 变量 数据 格式 
(With Quality assessment and Covariates ) 一 


司 时 涉及 质量 评价 结果 和 协 变量 数据 


22 Meta 分 析 

Meta 分 析 页 面 由 左 侧 操作 栏 和 6 个 功能 选项 组 
成 ， 左 侧 操 作 栏 包含 SROC 绘图 功能 的 选项 ( Options 
for SROC plot tab) 和 分 析 结 果 功 能 的 选项 ( Options 
for Statistics tab ) ; 6 个 功能 选项 分 别 是 纳入 研究 的 准 
确 性 结果 ( Study-level Outcomes ) , SROC 图 ( SROC 
plot ) 、 分 析 结 果 ( Statistics ) 、 人 参数 估计 结果 ( Parameter 
Estimates ) 、 适 用 于 RevMan 的 参数 估计 值 (Parameters 
for RevMan ) 、 和 森林 图 ( Forest Plots ) 。 

“纳入 研究 的 准确 性 结果 ”提供 每 项 纳入 研究 的 灵 

敏 度 、 特 异 度 、 灵 敏 度 研 究 权 重 和 特异 度 研 究 权 重 。 


MetaDTA: Diagnostic Test Accuracy Meta-analysis Home Load Data Meta-Analysis Sensitivity Analysis Prevalence References 


Select | No file selected 


File Upload Example datasets 


Data for Analysis 


Please select a file to upload 


The file should contain at least six columns. Labelling of columns is case sensitive. 


Default maximum file size is 5MB. Both Excel (.xIsx) and 
Comma Seperated Value (.csv) files are accepted. 


The first column should be labelled author and contain the name of the study author. The author name must be unique for each study. 


The second column should be labelled year and contain the year of publication. 


File options 
First row as column headings 


The third column should be labelled TP and contain the number of patients with a true positive test result. 
The fourth column should be labelled FN and contain the number of patients with a false negative test result. 


The fifth column should be labelled FP and contain the number of patients with a false positive test result. 


Select example dataset 


The sixth column should be labelled TN and contain the number of patients with a true negative test result. 


(€ Standard 

O With Quality Assessment 

O With Covariates 

O With Quality assessment and Covariates 


Download example datasets 
& Standard Example 
& Quality Assessment Example 
"ae Covariate Example 


& Quality Assessment and Covariate Example 


Including quality assessment data (optional) 


To allow the quality assessment results from the QUADAS-2 tool to be incorporated into the plots an additional seven columns are 
required. 


The seventh column should be labelled rob PS , representing the risk of bias in terms of the patient selection. 

The eighth column should be labelled rob IT , representing the risk of bias in terms of the index test. 

The ninth column should be labelled rob RS , representing the risk of bias in terms of the reference standard. 

The tenth column should be labelled rob FT , representing the risk of bias in terms of the flow and timing. 

The eleventh column should be labelled ac PS , representing the applicability concerns in terms of the patient selection. 
The twelfth column should be labelled ac IT , representing the applicability concerns in terms of the index test. 

The thirteenth column should be labelled ac RS , representing the applicability concerns in terms of the reference standard. 
These columns should contain the numbers 1, 2 or 3 which represent low, high or unclear risk of bias/applicability concerncs 
respectively. 

For information about the QUADAS-2 tool and how to use it please visit: 
https://www.bristol.ac.uk/population-health-sciences/projects/quadas/quadas-2/ 


图 7 BEL a 
Figure 7 Load data page 
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#2 US 
Table 2 Example data tpi 
发 表 时 

第 一 作者 ia) (AE) TP FN FP TN rob PS rob IT. rob RS rob FT ac PS ac IT ac RS BME 国家 IQCODE 
FLICKER 1997 188 28 35 48 2 2 2 3 1 3 1 3.6 WRAY 26 
GARCIA 2002 83 7 4 19 p 1 1 1 1 1 1 3.6 西班牙 16 
GONCALVES 2011 109 43 17 35 1 1 2 1 1 1 1 41 AKAN 16 
HANCOCK 2000 73 12 36 23 1 p 1 1 1 3 1 3.6 英国 16 
HARWOOD 1997 43 0 29 105 1 2 3 1 1 2 1 3.3 英国 16 
JORM 1991 im y 9 36 2 2 1 2 2) 1 1 3.6 ”澳大利亚 26 
KNAEFELC 2003 215 14 50 44 1 2 1 2 1 1 3 3.6 WRAY 16 
MACKINNON 1998 52 6 17 31 2 2 1 3 3 3 1 3.6 瑞士 16 
MULLIGAN 1996 3 0 25 18 2 2 3 3 3 3 3 3.3 瑞士 26 
NARASIMHALU 2008 145 24 90 317 2 2 2 2 p 3 3 34 新 加 坡 16 
SIKKES 2000 173 7 52 37 2 2 1 1 » 1 1 33 荷兰 16 
SIRI 2000 094 6 12 88 2 p 1 2 3 9) 3 3.3 泰国 32 
TANG 2003 21 3 A41 124 1 2 1 2 2 2 1 3.4 中 国 26 


ik: TP- EHE, FN- 假 阴性 ，FP= 假 阳 性 ，TN= 假 阴 性 ，rob= 偏 倚 风 险 ，ac= 适用 性 ，PS= 病例 选择 ，IT= 待 评价 的 诊断 试验 ，RS= 金 标准 ， 


FT= 病例 流程 和 诊断 试验 与 金 标准 之 间 的 时 间 间 隔 ，Threshold= 截断 值 ，Country= 国家 ，IQCODE= 老年 认 知 功能 减退 知情 者 问卷 。 


“SROC 图 ”中 默认 选项 有 单个 研究 估计 值 (Data 
Points )、 汇 总 估计 值 ( Summary point ).95% 置信 区 域 ( 95% 
Confidence region ) , 9596 tit 测 区 EÈ (95% Predictive 
region) 、 灵 敏 度 (Sensitivity) 、 特 异 度 ( Pecificity ) 、 
假 阳 率 ( False Positive Rate ) 等 可 根据 需要 勾 选 (图 
8) 。 如 用 户 选择 SROC 曲线 ， 同 时 可 以 选择 外 延 SROC 
曲线 ( Extrapolate SROC curve ) ， 但 在 大 多 数 情 况 下 应 
避免 外 延 ; 若 用 户 只 想 考 虑 单个 研究 的 灵敏 度 与 特异 
度 的 95% 置信 区 间 ， 可 取消 “Bivariate model options” 
的 全 部 选项 并 勾 选 “Display 95% study level confidence 
intervals” 的 全 部 选项 即 可 。 

“分 析 结 果 ” 报 告 了 纳入 研究 汇总 值 的 的 参数 信息 ， 
用 户 可 根据 需要 在 左 侧 操作 栏 处 勾 选 需要 显示 的 参数 。 
该 平台 默认 勾 选 灵敏 度 ( Sensitivity )、 特 异 度 ( Specificity ) 
和 假 阳 率 ( False Positve Rate ) 等 3 个 参数 以 制 成 表格 。 

“参数 估计 结果 ”呈现 了 经 对 数 转化 灵敏 度 和 特异 度 的 
双 变 量 正 态 分 布 ， 用 以 辅助 建 模 时 估计 测试 性 能 的 不 确 
定性 (图 9) 。 

“适用 于 RevMan 的 参数 估计 值 ”可 生成 供 RevMan 
软件 所 需 的 参数 估计 值 ， 便 于 用 户 在 ROC 空间 中 构图 
并 将 分 析 结 果 纳 入 Cochrane 系统 评价 中 (网 10 ) s “R 
林 图 ”中 分 别 旦 现 各 项 研究 的 灵敏 度 与 特异 度 的 森林 图 

(图 11)。 


2.3 ”敏感 性 分 析 

敏感 性 分 析 的 目的 是 探讨 用 户 在 分 析 中 所 作假 设 对 
结果 的 影响 ， 其 页 面 内 容 与 Meta 分 析 页 面相 似 ， 不 同 
之 处 在 于 敏感 性 分 析 页 面 的 左 侧 灰色 框 的 底部 增加 了 所 


选 纳 入 研究 (Select studies to include ) 选项 、SROC 图 、 
分 析 结 果 。 

“所 选 纳 入 研究 "可 通过 排除 研究 进行 敏感 性 分 析 ， 
该 区 域 仅 需 将 排除 研究 不 勾 选 即 可 (图 12 ) 。 

“SROC 图 ”中 增添 模型 显示 (Select which model 
to display ) 的 选项 ， 用 户 可 根据 需要 自行 选择 。 
MetaDTA 平台 敏感 性 分 析 中 的 SROC 图 已 默认 勾 选 原 
始 模 型 ( Original model ) 和 敏感 性 分 析 模 型 ( Sensitivity 
analysis model) ， 原 始 模 型 将 所 有 研究 以 灰色 在 图 中 呈 
现 结果 ; 敏感 性 分 析 模 型 将 已 勾 选 的 研究 以 蓝 色 和 黑色 
在 图 中 呈现 (图 13) 。 在 图 中 可 以 看 到 ， 排 除 这 两 项 
研究 对 改变 灵敏 度 和 特异 度 的 Meta 分 析 估计 值 或 SROC 
曲线 本 身影 响 不 大 , 但 是 置信 区 域 和 预测 区 域 略 有 扩大 ， 
反映 分 析 中 的 证 据 量 较 少 。“ 分 析 结 果 ” 中 提供 两 个 表 
格 ， 第 一 个 是 对 所 有 研究 进行 Meta 分 析 的 结果 ; 第 二 
个 是 对 选 定 纳入 研究 进行 敏感 性 分 析 的 结 


3 讨论 


本 文 提 到 MetaDTA 是 一 个 能 够 支持 无 任何 统计 知 
识 的 用 户 对 诊断 试验 准确 性 研究 进行 Meta 分 析 的 免费 、 
交互 式 在 线 应 用 程序 ， 并 结合 案例 详细 介绍 了 其 操作 步 
又 。 针 对 这 些 内 容 可 以 发 现 该 应 用 程序 主要 有 三 大 优势 : 
一 是 给 无 统计 学 专业 知识 的 用 户 提供 友好 型 界面 ， 便 于 
运用 双 变 量 模型 进行 Meta 分 析 ; 二 是 将 大 部 分 数据 与 
结果 以 交互 式 SROC 图 的 形式 呈现 ,便于 用 户 从 多 个 角 
度 查 看 相关 信息 ; 三 是 以 简单 的 交互 方式 进行 敏感 性 分 
析 以 评 佑 假设 对 参数 估计 的 影响 ,便于 节省 用 户 时 间 。 

双 变 量 模型 更 适用 于 诊断 试验 准确 性 研究 进行 Meta 
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Options for SROC plot tab 
Data Points 

© SROC curve 

O Display disease prevalence 

C Display percentage study weights 


Bivariate model options 
@ Summary point 
@ 95% Confidence region 


Display 95% study level confidence intervals 


C) Sensitivity 
Specificity 


Options for Statistics tab 


© Sensitivity 
@ Specificity 
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Study-level Outcomes SROC plot Statistics Parameter Estimates Parameters for RevMan Forest Plots 


Note: At least one box under ‘Options for SROC plot tab’ must be selected to avoid an error message 
Plot title 
Random Effects Meta-Analysis 


Random Effects Meta-Analysis 
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图 8 SROC 图 页 面 
Figure 8 SROC plot page 
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Options for SROC plot tab 
Data Points 

O SROC curve 

口 Display disease prevalence 

O Display percentage study weights 
Bivariate model options 

Summary point 


95% Confidence region 
95% Predictive region 
Display 95% study level confidence intervals 
C) Sensitivity 

C) Specificity 

Options for Statistics tab 
Sensitivity 

Specificity 

False Positive Rate 

O Correlation 

口 HSROC parameters 

口 Diagnostic Odds Ratio 

O Likelihood Ratios 


Reset all inputs 


Study-level Outcomes SROC plot Statistics Parameter Estimates Parameters for RevMan Forest Plots 


Below are the parameter estimates for the bivariate normal distribution for mean sensitivity and specificty (on the logit scale). Users may 
find these useful for further modelling e.g. inclusion of test accuracy in a decision modelling framework. 


T ( ( logit(sens) ) , [e el | 
logit(spec) J (covariance | i 
where: 
Parameter Estimate 
logi(sens) 2.289 
logit(spec) 0.681 
Ofgisen 0.063 


Ofgaspeo) 0.047 
covariance -0.010 


& Download Table 


9 参数 估计 结果 页 面 
Figure 9 Parameter estimates page 
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Study-level Outcomes SROC plot Statistics Parameter Estimates Parameters for RevMan Forest Plots 


Options for SROC plot tab 
Below are the parameter values required by Cochrane's RevMan software to construct plots in the ROC space for users who wish to 

Data Points include the analysis results as part of a Cochrane review. 

[SSC cuve Parameter Estimate 

O Display disease prevalence E(logitSe) 2.289147 

CJ Display percentage study weights E(logitSp) 0.681313 

Bivariate model options Var(logitSe) 0.599118 

Summary point Var(logitSp) 0.540572 


9596 Confidence region 
95% Predictive region 


Corr(logits) -0.229761 


SE(E(logitSe)) 0.250742 
Display 95% study level confidence intervals z 

SE(E(logitSp) 0.217803 
O Sensitivity 


O Specificity Cov(Es) -0.010077 


& Download Table 
Options for Statistics tab 


Sensitivity 

Specificity 

False Positive Rate 

O Correlation 

口 HSROC parameters 
口 Diagnostic Odds Ratio 
口 Likelihood Ratios 


Reset all inputs 


图 10 适用 于 RevMan 的 参数 估计 值 页 面 


Figure 10 Parameters for RevMan page 
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Study-level Outcomes SROC plot Statistics Parameter Estimates Parameters for RevMan Forest Plots 


Options for SROC plot tab 
Data Points Forest plot of sensitivity Forest plot of specificity 
O SROC curve 
: : Flicker mr 0.87 (0.82, 0.91] Flicker — 0.58 [0.47, 0.68] 
Display disease prevalence 
ES Garcia m 0.92 (0.85, 0.96] Garcia Fe1 03 (0.63, 0.93] 
Displai rcentage study weights Goncalves eT 0.72 [0.64, 0.78] Goncalves eH 0.67 [0.54, 0.78] 
LE Hancock m 0.86 [0.77, 0.92] Hancock — 0.39 (0.28, 0.52] 
Bivariate model options Harwood f^ — 1.00 (0.92, 1.00] Harwood HH 0.78 (0.71, 0.84] 
Jorm H+ 0.71 (0.51, 0.85] Jorm ee) 0.80 (0.66, 0.89] 
Summan pon Knaefelc Ha — 0.94 [0.90, 0.96] Knaefelc — 0.47 (0.37, 0.57] 
95% Confidence region Mackinnon o. 0.90 [0.79, 0.95] Mackinnon — 0.65 [0.50, 0.77] 
95% Predictive region Mulligan 1 1.00 [0.90, 1.00] Mulligan ee 0.42 [0.28, 0.57] 
Narasimhalu HH 0.86 [0.80, 0.90] Narasimhalu HH 0.78 [0.74, 0.82] 
Display 95% study level confidence intervals Sikkes Fal 0.96 [0.92, 0.98] Sikkes me 0.42 [0.32, 0.52] 
E Siri mm 0.94 (0.88, 0.97] Siri He 0.88 [0.80, 0.93] 
= NW Tang m 0.88 [0.69, 0.96] Tang m 0.75 [0.68, 0.81] 
O Specificity rr 一 一 一 
051 075 1.00 028 060 093 
A n Sensitivit ficit 
Options for Statistics tab iini Spee 
Select format 
Sensitivity » pot 
T des 
False Positive Rate 
O Correlation às Download Sensitivity Forest Plot | a% Download Specificity Forest Plot 
HSROC parameters 
口 Diagnostic Odds Ratio 
口 Likelihood Ratios 
Reset all inputs 


图 11 森林 图 页 面 
Figure 11 Forest plots page 
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Statistics Parameter Estimates Parameters for RevMan Forest Plots 
Search: 
TP FN FP TN N Sens Spec Weight Sens Weight Spec 
188 28 35 48 299 0870 0.578 8.505 8.507 
83 7 4 19 113 0.922 0.826 7874 5142 
109 43 7 35 204 0717 0.673 8.339 8.646 
73 12 36 23 144 0.859 0.390 8.086 8.031 
43 0 29 105 177 1.000 0.784 7.072 7.635 
7 7 9 36 69 0.708 0.800 6.053 8296 
215 14 50 44 323 0.939 0.468 8.530 7.731 
52 6 7 31 106 0.897 0.646 7.724 7.259 
33 0 25 18 76 1.000 0.419 7.179 4.902 
145 24 90 317 576 0.858 0.779 8.283 9726 
173 7 52 37 269 0961 0.416 8.452 6.971 
94 6 12 88 200 0940 0.880 7.650 8.007 
21 3 4 124 189 0.875 0.752 6.253 9.147 
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Sensitivity Analysis 

Study-level Outcomes SROC plot 
Options for SROC plot tab 
Data points Show|30 | entries 
O SROC curve 

Author Year 

Summary point 1 Flicker 1997 
95% Confidence region 2l 
95% Predictive region Dara 
C) Display d 3 Goncalves 2011 
CU 4 Hancock 2009 
Select which model to display 5  Hamwood 1997 
Original model 6 — Jom 1991 
Sensitivity analysis model 

7  Knaefelc 2003 
Display 95% study level confidence intervals 
D Sensitivity 8 Mackinnon 1998 
D Spediicly 9 Mulligan 1996 
Options for Statistics tab 10 — Narasimhalu 2008 
Sensitivity 11 Sikkes 2010 
‘Specificity me 
False Positive Rate =m 26 
C) Correlation 13 Tang 2003 
口 HSROC parameters " : 
O Diagnostic Odds Ratio Showing 1 to 13 of 13 entries 


4k, Download Table 


Select studies to include: 


Note: This table only includes studies selected in the sidebar. 


@ Flicker 
@ Garcia 
@ Goncalves 


Nis the total number of individuals in each study (N= TP + FN + FP + TN). 
Sens is the sensitivity, which is the probability of a positive test result given that the patient has the disease ( Sens = TP / [TP + FN] ). 


Spec is the specificity, which is the probability of a negative test result given that the patient does not have the disease ( Spec = TN / [TN + FP] ). 


E] Hancock 
@ Harwood 
@ Jom 

@ Knaefelc 
@ Mackinnon 
m Mullinan 
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Weight Sens is the precentage study weight of sensitvitly, calculated using methods by Burke et al. 
Weight_Spec is the percentage study weight of sensitivity, calculated using methods by Burke et al. 


Figure 12 Sensitivity analysis page 


4r o O8 T YE RevMan 中 正确 使 用 双 变 量 模型 对 诊 
断 试验 准确 性 研究 进行 Meta 分 析 ， 用 户 需 要 在 使 用 统 
计 软 件 进行 统计 分 析 后 将 SROC 参数 值 反 馈 到 RevMan 
中 才 可 以 生成 SROC 图 。 但 使 用 专业 的 统计 软件 和 统计 
方法 对 于 无 统计 学 专业 知识 的 人 来 说 是 非常 困难 的 ， 而 
MetaDTA 可 通过 既 能 由 熟悉 DTA-MA 流程 的 统计 学 家 
与 无 统计 学 专业 知识 的 非 统 计 学 家 使 用 ， 还 能 确保 结果 
被 正确 解释 的 优势 解决 这 一 问题 。SROC 曲线 通常 是 以 
静态 图 形 的 形式 呈现 ， 若 Meta 分 析 包 含 大 量 诊断 试验 
准确 性 研究 ， 则 特定 人 研究 的 估计 值 可 能 因 相 互 重合 导 和 致 
SROC 岁 变 得 繁琐 旦 难以 阅读 。 交 互 式 网 形 是 静态 网 形 
的 替代 方法 ， 而 MetaDTA 不 仅 能 够 以 交互 式 功能 支持 
用 户 点 击 特定 研究 的 估计 值 并 获得 相关 详细 信息 ， 还 能 
在 无 法 显示 更 多 信息 的 单 图 问题 上 生成 多 个 交互 式 图 并 
以 多 个 角度 充分 显示 。 敏 感性 分 析 是 确保 Meta 分 析 结 
果 稳 健 性 的 关键 。 但 敏感 性 分 析 在 研究 假定 条 件 对 结果 
的 影响 这 一 过 程 是 非常 耗 时 的 。 比 如 ， 在 RevMan 中 进 
行 敏感 性 分 析 时 , 每 排除 一 项 研究 就 需要 重新 运行 分 析 。 
而 MetaDTA 可 通过 勾 选 是 否 包 含 某 人 研究 以 排除 该 研究 


并 同时 呈现 结果 与 原始 分 析 ， 便 于 节省 时 间 并 在 图 表 中 
更 直观 地 显示 被 删除 研究 对 Meta 分 析 结 果 的 影响 。 

MetaDTA 经 过 多 次 更 新 已 经 成 为 一 个 成 熟 的 在 线 应 
用 程序 ， 但 仍 有 不 足 之 处 。 比 如 ，MetaDTA 虽 支 持 使 用 
双 变 量 模型 评估 诊断 试验 准确 性 研究 ， 但 不 支持 诊断 试 
验 准确 性 研究 进行 亚 组 分 析 与 单 变 量 元 回归 ， 导 致 无 法 
对 两 个 或 多 个 诊断 试验 准确 性 研究 的 Meta 分 析 进 行 比 
较 。 和 希望 在 未 来 的 改进 中 可 以 增加 这 些 功 能 。 

作者 贡献 : 杨 水 华 查找 资料 、 组 织 讨论 、 撰 写 初稿 ; 
姚 桂 英 整理 资料 、 修 改 论文 ; RRR. WMHS. EE 
整理 资料 、 讨 论 修改 ; MR, SKEM, Hi BLAK 
论文 选 题 、 指 导 写 作 、 修 订 稿 件 、 审 查 论文 。 
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